Learning from Failures: Retrieval-Centric CoT via Hard Negatives for Unified Multimodal Retrieval
从失败中学习:检索中心化思维链与难负样本驱动的统一多模态检索
🧭 多模态检索 · 检索中心化思维链
Glint Lab
提出UniME-R1,基于检索反馈生成思维链纠正嵌入器混淆,借助难负样本与强化学习提升检索
📌 工作参考价值(4 点)
- 检索反馈驱动的思维链:在推荐重排序阶段,可对初始召回结果生成解释性推理文本,放大易混淆 item 的细微差异,用于 query 改写或特征增强。
- 难负样本挖掘策略:有效模拟线上召回失败 case,尤其适用于构建对抗训练集,提升模型对相似商品/视频的判别力。
- 双模式嵌入器设计:直接检索与 CoT 增强检索双路并行,可在精排场景中作为混合表示,或用于多阶段漏斗中粗精排衔接。
- 检索导向强化学习:将对齐奖励直接定义在检索指标上,可迁移至推荐场景中,优化生成式推荐模型的最终曝光收益而非中间 token 似然。